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Beschreibung 

Qualitatsorientierte Bewertung klinischer Studiendaten 

1. Die Qualitat der Datenerhebung fur klinische Studien, 
z.B. zur Zulassung neu entwickelter Medikamente , ist 
entscheidend fur den Erfolg der Studie, und kann somit 
liber Zulassung oder Nicht-Zulassung eines mit 
Milliardenaufwand entwickelten Medikamentes entscheiden. 
Datenerhebung umfasst in diesem Kontext das gesamte 
Spektrum medizinisch -klinischer Daten, von einer 
Patientenbef ragung ("sind die Schmerzen stark, mittel 
oder schwach" ) , uber eine Blutdruckmessung bis hin zu 
einer Rontgenauf nahme . Zwar werden im Rahmen der 
Studienprotokolle exakte Vorschriften erstellt, wie die 
Daten zu erfassen sind. Eine Kontrolle aller 
Datenerhebungsvorgange , ob die Vorschriften eingehalten 
werden, ist jedoch nicht moglich. Auch lassen die 
Ausfuhrungsvorschrif ten immer noch gewisse Spielraume 

of fen. Letztendlich wird ein erfahrener Spezialist immer 
bessere Daten erheben als ein unerfahrener Neuling. 
Damit erhebt sich das Problem, wie die Qualitat 
erhobener Daten fur klinische Studien retrospektiv 
beurteilt werden kann. Weiterhin fehlen bisher 
Verfahren, wie mithilfe retrospektiver Bewertung der 
erhobenen Daten eine qualitatsabhangige Vergiitung fur 
die Datenerhebung bestimmt werden kann, oder wie fur die 
kiinftige Auswahl der Partner zur Durchfuhrung klinischer 
Studien ( Investigator en) eine Quali tats -Benchmarking 
durchgefuhrt werden kann. 

2 . Eine standardisierte vergleichende Bewertung der 
Datenqualitat erfolgt nicht, und es gibt auch noch keine 
Modelle zur erf olgsabhangigen Vergiitung klinischer 
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Studien, bei denen die Vergiitung von der Datenqualitat 
abhangig gemacht wird. 



3 . Bei den meisten Daten, die im Rahmen klinischer Studien 
erhoben werden, ist die Qualitat eines Einzeldatums 
nicht bewertbar. Werden jedoch Daten uber groSe 
Patientenkollektive erhoben, so kann erwartet werden, 
dass gewisse statistische GroSen zweier Datenmengen, die 
von unterschiedlichen, aber in ihrer Zusammensetzung 
vergleichbaren Patientenkollektiven erhoben werden, 
idealer weise gleich sein sollten. 

Als willkiirlich.es Beispiel sei genannt : Wenn bei zwei 
Patientenkollektiven mit gleicher Alters-, Geschlechts- 
und ethnischer Verteilung der Blutdruck unter 
standardisierten vorgeschriebenen Bedingungen erhoben 
15 wird, muss erwartet werden, dass der Mittelwert des 

Blutdrucks iiber alle Patienten in beiden Gruppen gleich 
ist. Ist dies nicht der Fall, so muss ein 
systematischer Grund fur den Unterschied vorhanden sein. 
Ein solcher Unterschied kann in einem fehlerhaft 
20 kalibrierten Messgerat, in einer unterschiedlich (bzw. 

falsch) durchgefuhrten Messverf ahren (z.B. die 
Blutdruckmanschette wird zu weit unten am Arm 
angebracht) , Messung nach korperlicher Anstrengung oder 
nach Ruhepause etc liegen. 
25 Ein solcher Unterschied kann aber auch in bisher nicht 

bedachten systematisch unterschiedlichen Zusammensetzung 
der Patientenkollektive liegen. Beispiel: die Kollektive 
kornmen aus deutlich unterschiedlichen sozialen 
Verhaltnissen. Das eine Einzugsgebiet ist New York's 
3 0 Bronx, das andere Beverly Hills in Los Angeles. Nun ist 

bekannt, dass Diabetes in sozial schwacheren Schichten 
haufiger ist, und dass die Grunderkrankung Diabetes zu 
Bluthochdruck fuhrt, also mit groSer Wahrscheinlichkeit 
zu unterschiedlichem mittlerem Blutdruck in zwei 
3 5 Patientenkollektivem mit deutlich unterschiedlichem 
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mittlerem sozialen Niveau . Dies mag ein Beispiel sein, 
das erfahrene Entwickler klinische Studienpro toko lie 
vorab bei der Auswahl der Patientenkollektive hatten 
bedenken imissen. Es wird aber sicher zahlreiche weitere 
5 Kausalketten geben, die weniger of f ensichtlich sind, 

beim Studiendesign nicht bedacht wurden, und die 
Aussagekraft der erhobenen Daten deutlich 
beeintrachtigen . 

10 Als weiteres Beispiel sei angefuhrt: wenn eine MessgroSe 

unter gut standardisierten Bedingungen erhoben wird, 
sind meist glatte Messwertkurven zu erwarten, die mit 
einem geringen, aber unvermeidlichen Messwertrauschen 
behaftet sind* Beispiel: ein Patient bekommt ein 
15 Blutdrucksenkendes Mittel. Der Blutdruck wird taglich 

gemessen, und sollte im Verlauf von 4 Wochen aufgrund 
des neuen Medikaments tendenziell abnehmen (Fig. ) . Bei 
unsachgemaSer Durchfuhrung der Blutdruckmessung bzw. 
Abweichung von den standardisierten Bedingungen kann 
20 dieselbe Messkurve beim selben Patienten mit deutlich 

hoherem Rauschen behaftet sein (Fig. ) . Eine Methode der 
Qualitatsbewertung der Daten ware also, die Streuung 
(das xx Rauschen " ) jeder Messkurve bei alien Patienten zu 
berechnen, und fur ein Patientenkollektiv den Mittelwert 
des Rauschens aller Messkurven zu bestimmen. 

Das Gegenteil kann auch der Fall sein: jede Messkurve 
wird ein fur das Messverf ahren typisches Grundrauschen 
(in absoluter Hohe und auch im Rauschmuster , etwa 

3 0 Frequenzspektrum des Rauschens) 

aufweisen. 1st nun das mittlere Rauschen aus vielen 
Messkurven untypisch kleiner als ein erwarteter 
Mindestwert, so deutet dies ebenfalls auf einen 
systematischen Fehler bei der Messdatenerhebung hin, bis 

3 5 hin zu "geschummelten" Daten (Schatzwerte statt 

Messungen) . 
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Es sind aus der Mathematik und Statistik zahlreiche 
Methoden bekannt, die fur eine derartige Auswertung zum 
Vergleich zweier Datenmengen angewendet werden konnen. 
Ohne Einschrankung der Allgemeinheit seinen 
beispielhaft genannt: (geometrischer , arithmetischer ) 
Mittelwert, Streuung, Variationskoef f izient , Parameter 
einer GauSverteilung, Trendanalyse, Korrelationsanalyse 
etc. Auch Mustererkennungsmethoden konnen eingesetzt 
werden, wie zum Beispiel Methoden zur Erkennung und 
Charakterisierung von raumlichen Clustern in 
mehrdimensionalen Datensatzen. 

Das vorgeschlagene Verfahren zur vergleichenden 
Qualitatskontrolle von zwei oder mehr Datenmengen aus 
zwei oder mehr Patientenkollektiven in klinischen 
Studien umfasst eine (beliebige) Kombination der 
folgenden Verf ahrensschritte : 

- Festlegen von Qualitatskontrollparametern fur 
Messdaten, und ggf . von Erwartungswerten, Ober- und 
Untergrenzen fur diese Parameter in den 
Studienprotokollen . 

- Auswertung der Datenkollektive unter Berechnung der 
Qualitatskontrollparameter 

- Vergleich der Qualitatskontrollparameter zwischen 
mehreren Datenkollektiven 

- Festlegung der Zielvereinbarung fiir die 
Qualitatskontrollparametern mit den Investigatoren, und 
Regelung der Bezahlung fur die klinische Studie in 
Abhangigkeit von den erreichten 

Qualitatskontrollparametern, entweder in absoluten 
GroiSen, oder als Prozentsatz vom besten Teilnehmer 
( Benchmarking ) 

- Anlegen von Datenbanken mit fruher erhobenen 
Qualitatskontrollparametern zum Zwecke des Benchmarking 
mit Hilfe der Datenbank wird ein Ranking der Qualitat 
der Investigatoren durchgef iihrt : Diese Information kann 
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bei der Auswahl der Investigatoren fur kiinftige Studien 
genutzt werden 

- entlarven von betrugerisch gefalschter Datenerhebung 
(z.B. mittels technisch nicht moglichen Rauschspektren 
in den Da ten) 

- Ausschluss von Datenkollektiven aus der Studie, wenn 
diese nachweisbar vorbestimmten Qualitatskriterien, 
gemessen rait den Qualitatskontrollparametern, nicht 
geniigen . 

- Vorab-Analyse der Datenkollektive nach einem 
festgelegten Meilenstein (z.B. 10% der 
Patientenzahlen) , 

und Ausschluss von Investigatoren mit schlechter 
Performance, bzw. ggf Aufdecken von systematischen 
Fehlern in den S tudienpr o toko 1 1 en bzw. der 
Zusammensetzung der Patientenkollektive, und Anderung 
de s S tudi enpr o toko lis 

- Erstellen eines Toolsets, das alle sinnvollen 
mathematisch-statistischen Methoden zur Ableitung von 
Qualitatsparametern enthalt, und Anwenden des Toolsets 
retrospektiv auf 2 oder mehr Datenkollektive aus 
klinischen Studien; Aufdecken von systematischen 
Unterschieden in den Datenkollektiven. Verwendung der 
gefundenen systematischen Unterschiede entweder zur 
kunftigen Verwendung als Qualitatskontrollparameter in 
Studienprotokollen, oder zur Aufdeckung von bisher nicht 
erkannten Kausalketten, die zu systematischen 
Unterschieden in Datenkollektiven fuhren. Des weiteren 
Ableitung von Grenzwerten fur die ' 
Qualitatskontrollparameter in kunftigen 
Studienprotokollen. • 

In einer sehr vorteilhaf ten Aus fiihrungs form haben die 
Datenbanken der klinischen Daten ein standardisiertes 
Format, und das Toolset der mathematisch-statistischen 
Auswertemethoden dem Format angepasste standardisierte 
Schnittstellen, so dass zum Zwecke einer Auswertung eine 
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Benutzeroberf lache ausreicht, bei der der Benutzer nur 
mehr einen Algorithmus ( ^Streuung 7 ' ) und eine 
Datenkategorie ( "Blutdruck" ) und eine Datenquelle 
(Studienname , Investigator) auswahlen muss, und ohne 
5 weitere Eingaben, Format ierung en oder Datentransf ers das 

Ergebnis der Auswertung erhalt. 



4. Die Qualitat der Daten aus klinischen Studien wird mit 
Hilfe mathematisch-statistischer Methoden durch 
vergleichende Bewertiing der abgeleiteten 
Qualitatsparameter aus zwei oder mehr Datenkollektiven 
bestimmt. Die gewonnene Information uber die 
Datenqualitat wird genutzt um 

- ein Ranking der Investigator en durchzufuhren, und fur 
kunf tige Studien die Investigatoren mit der besten 

15 Performance auszuwahlen 

- die Bezahlung fur die Erhebung klinischer Daten von 
der Datenqualitat abhangig zu machen 

- die Qualitat der Daten in einer Vorabanalyse zu 
quantif izieren, und die Studienprotokolle ggf . zu 

20 verbessern 

- Datenkollektive oder Investigatoren, die den 
Qualitatskriterien nicht genugen, aus der Studie 
auszuschliefeen 

25 GemaS einem unabhangigen Anspruch werden Datenkollektive 

retrospektiv mit einem Toolset mathematisch- 
statistischer Methoden analysiert, um geeignete 
Qualitatskontrollparameter , deren typische Mittelwerte 
und Grenzwerte zu bestimmen, und um bisher unerkannte 

3 0 Kausalketten und Korrelationen fiir fehlerhafte 

Datenerhebung aufzudecken. 
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Studienprotokoll mit 
definierten Qualitatsparametern, 
zugehorigen Erwartungswerten 
und erlaubten Grenzwerten 



Auswahl der 
Qualitatkontrol- 
parameter gemaft 
Studienprotokoll 



Datenbank 

mit mathematisch- 

statistischen 

Auswertemethoden 



Auswertung der 
Datenkollektive mit 
ausgewahlten 
Studienkontroll 
-parametern 




Datenbank 

mit Daten aus klinisch^n 
Studien 

Datenkollektiv 1 , 
Investigator 1 



Datenbank 

mit Daten aus klinisch^n 
Studien 

Datenkollektiv 2, 
Investigator 2 



Datenbank 

mit Daten aus klinisch^n 
Studien 

Datenkollektiv 
Investigator .... 




Datenbank 
mit Ranking von 

Investigatoren 
auf der Basis 
vergleichender 

Datenqualitats 
bewertung 
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Ableitung von 
Kosequenzen aus 
den Ergebnissen der 
Auswertung 



Qualitats- 

abhangige 

Bezahlung 



AusschluR. von 

Daten- 

kollektiven 



Anderung des 

Studien- 

protokolls 




Auswahl von Investigatoren auf der 
Basis der Ranking -Datei 



